開始介紹 Big Data 之前,有人翻成「海量資料」,也有人翻成「巨量資料」,Big Data 指的是對於大量資料處理的工具、程序、方法和流程等的集合,而不是單單指資料的本身而己,因為大量資料在沒有做任何處理以前,就資料本身來說,是不會有任何價值的,所以,需要經過適當的萃取才會有價值,可是,為什麼需要發展 Big Data 的相關技術呢 ? 現在的資料庫技術沒有辦法處理嗎 ? 關於這個問題,就要先來談一下 Big Data 所要處理的 Data 是怎樣的資料哩!Big Data 的議題會受到企業重視,主要是因為現在企業所要收集的資料不再只是文字的類型,還 包括有影音和圖像,同時,資料來源的方式也不同,除了傳統的人工輸入和系統計算產生的資料以外,還包含網路上每日產生的大量資料,而這些資料產生的速度遠超過人工和現行資料庫所能處理的能力,另外,資訊化已經走過數十個年頭,許多大型和有年紀的企業也已經累積出相當龐大的資料量,因此,不論是新進或舊有的資料,企業都希望能夠從這些超大量資料中,透過一些方法和工具能夠在很短的時間內,取出可以幫助企業迅速應變的資訊!
Read more: http://www.arthurtoday.com/2012/01/big-data.html#ixzz3DUVMMbub
其實..big data,指的就是垃圾資料...不需要經過分析的資料。
不需要經過分析,資料處理才能快.....
為什麼這麼說?
有價值的資料,才需要被分析、正規化....
big data,無論欄位資料需不需要、正不正確,甚至有沒有存在必要...都一律儲存
這樣才會快
也因為這樣才會海量.....
亂說一通,台灣就是很多官產學不懂裝懂,大家都想分一推羹
到最後連Big 在哪都不知道,反正錢燒一燒就沒了
如果只為了存資料,就買一些硬碟就好了,怎麼Big 不Big
資料不分析,不處理,你存543幹什麼,我請問你去年的今天你在公司做什麼事??
你給我回全部在公司備份磁帶裡自己想辦法
我試問這跟
1.網路磁碟有何不同??
2.跟雲端服務有何不同??
3.跟資料庫有何不同??
4.跟資料採礦有何不同??
5.這些資料的價值??
雲端是什麼??前幾年很樣的名詞
就一堆產官學界去定義,雲端就是....
建立一堆雲端中心,然後...不知雲能做什麼,帶給什麼經濟效益…又一堆雲端中心倒
我們公司去年請留美xxx大學名校博士講Big Data,然後成立 Big Data center
做一年
1.不知Data從哪來
2.不知Big 的用意
今年那位博士又來,這次講Small Data,他說Big Data 做不起,不然改做Small Data
在台灣就個人而言是拿來唬人裝高知識的名詞
或許在國外是真的很有價值的研究也不一定
台灣人就是把題目訂抽象,這樣比較好研究,怎麼都可以做,比較容易申請研究經費,經費也能申請比較多
題目訂太死就什麼都不能做,比如我要做一隻錶,那完蛋了,你只能做錶,你不能做鐘,你的經費也只有錶價值的經費
很多東西都是既有的技術,但用新的概念去應用
但很多人搞不懂就把既有的技術用既有的想法去做
然後套個新名詞就要申請新資源